Q. 데이터 엔지니어 공부/코딩테스트

답변 3

• 멘

  멘토 호날도KT

  코상무 ∙ 채택률 61%

  ---

  채택된 답변

  ● 채택 부탁드립니다 ● 데이터 엔지니어는 알고리즘보다 데이터 처리 역량이 핵심입니다. SQL은 조인, 집계, 서브쿼리, 윈도우 함수까지 다룰 수 있으면 충분하며 프로그래머스 기준 2단계 중상 수준이면 적절합니다. 파이썬은 알고리즘보다 pandas와 numpy를 활용해 데이터 전처리, 정제, 변환을 할 수 있는지가 중요합니다. 코딩테스트가 있다면 기초 자료구조 정도만 대비하면 되고 핵심은 데이터 파이프라인 이해입니다. 간단한 ETL 프로젝트 하나를 만들어보는 것이 가장 효과적입니다. 결국 실무는 문제 풀이가 아니라 데이터를 다루는 능력을 봅니다.

  ---
• 다

  다할수있습니다큐비앤맘

  코이사 ∙ 채택률 57%

  ---

  채택된 답변

  조금이라도 도움이 되셨다면 채택 부탁드립니다 ~~~~ 데이터 엔지니어 기준에서 요구하는 수준은 알고리즘보다 데이터 처리 능력에 훨씬 가깝습니다. SQL은 단순 조회가 아니라 조인 서브쿼리 윈도우 함수까지 자유롭게 쓰는 수준이 필요합니다. 프로그래머스 2단계 정도면 기본기는 충분합니다. 파이썬은 알고리즘보다 pandas numpy를 활용해 데이터 전처리 파이프라인을 짤 수 있는지가 핵심입니다. 파일 읽기 가공 결측치 처리 집계 자동화까지 구현할 수 있어야 합니다. 결론적으로 둘 다 필요하지만 비중은 데이터 처리 쪽이 훨씬 큽니다. 간단한 코테 대비는 하되 프로젝트 형태로 데이터 수집 가공 저장까지 한 번 흐름을 만들어보는 것이 가장 빠르게 실력을 올리는 방법입니다

  ---
• 

  채택스포스코

  코부사장 ∙ 채택률 76%

  ---

  채택된 답변

  안녕하세요. 멘티님. 반갑습니다. 데이터 엔지니어 인턴이나 부트캠프 입구를 보신다면 SQL은 단순 조회보다 조인 집계 조건부 집계를 자연스럽게 다룰 수 있는 수준까지는 맞추시는 것이 좋습니다. 프로그래머스 기준으로는 1단계를 빠르게 풀고 2단계를 안정적으로 맞히는 정도면 시작점으로 충분하고 3단계는 지원처가 강하게 보는 곳이 아니면 우선순위를 조금 뒤로 두셔도 됩니다. 현업에서는 복잡한 문법보다 요구사항을 SQL로 정확히 옮기는 힘을 더 봅니다. 파이썬은 데이터 엔지니어 쪽이면 알고리즘만 보는 경우보다 파일 처리 데이터 전처리 예외 처리 간단한 자동화 스크립트 작성 능력을 더 자주 봅니다. pandas와 numpy도 아예 안 보면 안 되지만 인턴이나 초급에서는 알고리즘 실력보다 데이터프레임 다루는 손이 있는지와 기본 문법으로 로직을 짜는지 정도가 더 중요합니다. 그래서 준비는 코딩테스트용 파이썬 기본기와 pandas로 데이터 읽기 정리 변환 집계 정도를 함께 가져가시면 좋고 백준식 알고리즘은 기초 자료구조와 구현 위주로만 단단히 해두시면 충분합니다. 결국 목표는 SQL은 실무형 문제를 풀 수 있게 파이썬은 데이터 다루는 기본 체력을 갖추는 쪽으로 잡으시면 됩니다. 모쪼록 도움이 되셨다면 채택부탁드립니다. 감사합니다.

  ---